Beliau berkahwin dengan Isabella Wadderburn pada 8 Oktober 1836. Hasil dari perkongsian hidup mereka dikurniakan tiga orang cahaya mata:

1. Emily Caroline Alexander (14 April 1838 – 10 Februari 1929).
2. Celia Elizabeth McNeil (8 Oktober 1840 – 15 Februari 1929).
3. Louisa Frances Fremantle (23 Februari 1843 – 20 Mac 1909).